【緣起】 最近兩個月的工作重點是學習CDH（Cloudera's Distribution Including Hadoop）的安裝部署和使用。在閱讀CDH的官方文檔時， ...

GraphLab是CMU（卡耐基梅隆大學）開發的一個以vertex為計算單元的大規模圖處理系統，是繼google的Pregel之后的第一個開源的大規模圖處理系統，它解決了傳統mapreduce框架對於 ...

近期的一項任務是對比Hadoop和Spark兩種分布式計算框架的迭代性能，為了更加充分合理地管理集群中的資源，用到了mesos這種資源管理平台。mesos最初是UC Berkeley A ...

mesos的具體安裝過程可以參考我的上一篇日志《mesos安裝總結》。 安裝Spark之前要在所有的主機上先安裝JDK和Scala。JDK的安裝過程就不贅述了。下面簡單介紹一下Scala 2.9.2 ...